Sinh ra ở Hồng Kông, Huỳnh Trí Văn được nuôi dưỡng trong một gia đình đơn thân. Cô lớn lên ở Cửu Long, trước đây cô từng theo học tại trường Cognitio (Cửu Long). Năm 2002, cô lấy được văn bằng về vũ đạo, sau đó cô tiếp tục lấy được văn bằng về hý kịch tại Học Viện Diễn Nghệ HongKong (HongKong Academy for Performing Arts). Văn có một chị gái, Cathy Wong, là giáo viên tiếng Anh tại Trung tâm Giáo dục King Glory. Mẹ cô là chủ một cửa hàng mỹ phẩm ở Wan Chai.

Cô là thành viên của nhóm Hồ Thuyết Bát Đạo (Nonsense Club) - một trong những hội chị em thân thiết nhất TVB. Thành viên của nhóm này gồm: Myolie Hồ Hạnh Nhi, Paisley Hồ Bội Úy, Nancy Hồ Định Hân, Mandy Huỳnh Trí Văn, Elaine Diêu Tử Linh và Selena Lý Thi Hoa. Cả sáu người đều có cùng sở thích và rất hiểu ý nhau, thường xuyên động viên, khích lệ nhau.

Cô còn là thành viên của team Crazy Runner, nhóm này gồm các cô gái của hội Hồ Thuyết Bát Đạo, cùng với Viên Vỹ Hào, Trần Sơn Thông, Hồ Nặc Ngôn và Tạ Đông Mẫn. Crazy Runner có một chương trình của TVB là Shall We Run - Nhất Khởi Bào Qua Đích Nhật Tử (一起跑過的日子), trong chương trình này quay tài liệu về hành trình chạy bộ của các thành viên.

Ngoài ra, cô còn một người bạn thân cùng ngành nữa tên là Candice Triệu Hy Lạc. Cả hai đều sinh cùng tháng cùng năm (Trí Văn sinh ngày 21.12.1982, Hy Lạc sinh ngày 04.12.1982), cùng tham gia Miss Hongkong 2007, học cùng một khóa đào tạo của TVB và ra mắt khán giả cùng lúc với nhau, hai người cũng đóng chung rất nhiều phim. Họ rất hiểu ý nhau, đôi lúc không cần nói ra cũng biết trước người còn lại đang muốn nói gì.